Список полезных команд

• Linux
  • Вывод версии дистрибутива
  • Дерево процессов
  • Поиск процесса занимающего порт
  • Фоновый процесс
  • Работа с фоновыми процессами
    • Ctrl + Z - приостановить и свернуть задачу
  • Добавление для ${USERNAME} возможности вызывать sudo
  • Смена владельца на user2 у файлов с владельцем user1
  • Смена группы на user2 у файлов с группой user1
  • Утилита поиска DNS
  • Порты
    • Проверка
    • Открытие
  • Стандартная HTTP авторизация
• Vim
  • Runtime команды
  • Конфигурационный файл Vim
• SSH
  • Генерация SSH ключей
  • Конфигурационный файл SSH
  • SSH туннель
  • Easy SOCKS Proxy
• macOS X
  • Mac OS Programms
  • Dock separator
• Nginx
  • Прокидка ссылок на файлы со staging'а на production
• Database
  • MySQL
    • Database dump (MySQL)
    • Запись в БД из файла (MySQL)
  • PostgreSQL
    • Создание БД
    • Database dump (PostgreSQL)
    • Запись в БД из файла (PostgreSQL)
    • Получение ссылок на поле таблицы (PostgreSQL)
    • Поиск залоченных процессов
    • Долго выполняющиеся запросы
    • Убийство процесса по pid
• Python
  • Virtualenv
    • Install virtualenv
    • Create virtualenv
    • Activate virtualenv
• Git
  • Создание алиаса для вывода дерева коммитов
  • Удаление игнорируемых файлов
  • Откат изменений в удаленном хранилище
  • Patch из нескольких коммитов
  • Переименование ветки
  • Удаление ветки
  • Переименование тега
  • Клонирование ветки
  • Клонирование сабмодулей
  • Удаление из индекса
  • Подделка даты коммита
  • Перезапись "Initial commit"
  • Git Flow

Linux

Вывод версии дистрибутива

lsb_release -a

Back to top

---

Дерево процессов

ps -e -o pid,args --forest

Back to top

---

Поиск процесса занимающего порт

netstat -vanp tcp | grep 8000

Back to top

---

Фоновый процесс

{command} > {process_log_file | /dev/null} 2>&1 &

Back to top

---

Работа с фоновыми процессами

Ctrl + Z - приостановить и свернуть задачу

Список задач

jobs

Вывести задачу на передний план

fg {group}

Убрать задачу на задний план

bg {group}

Back to top

---

Добавление для ${USERNAME} возможности вызывать sudo

sudo usermod -a -G sudo ${USERNAME}

Back to top

---

Смена владельца на user2 у файлов с владельцем user1

find ./ -user user1 -exec chown user2 {} +

Back to top

---

Смена группы на user2 у файлов с группой user1

find ./ -group group1 -exec chown :group2 {} +

Back to top

---

Утилита поиска DNS

dig {domain} [any | A | MX | TXT | NS | SOA]

Back to top

---

Порты

Проверка

ss -nap | grep :{port}

# for mac:
lsof -n -i:{port} | grep LISTEN

Back to top

---

Открытие

iptables -I INPUT -p tcp -m tcp --dport 53 -j ACCEPT

Back to top

---

Стандартная HTTP авторизация

htpasswd -c {filename} {username}

e.g.

htpasswd -c .htpasswd finagin

Back to top

---

Vim

Runtime команды

Включить нумерацию строк

:set nu

Переключить кодировку

:e ++enc=cp1251

Back to top

---

Конфигурационный файл Vim

~/.vimrc

" Configuration file for vim
set modelines=0		" CVE-2007-2438

" Normally we use vim-extensions. If you want true vi-compatibility
" remove change the following statements
set nocompatible	" Use Vim defaults instead of 100% vi compatibility
set backspace=2		" more powerful backspacing
set clipboard=unnamedplus
" Don't write backup file if vim is being called by "crontab -e"
au BufWrite /private/tmp/crontab.* set nowritebackup nobackup
" Don't write backup file if vim is being called by "chpass"
au BufWrite /private/etc/pw.* set nowritebackup nobackup

let skip_defaults_vim=1

" Use the Solarized Dark theme
set background=dark
set encoding=utf-8 nobomb

" Centralize backups, swapfiles and undo history
set backupdir=~/.vim/backups
set directory=~/.vim/swaps
if exists("&undodir")
	set undodir=~/.vim/undo
endif

" Don’t create backups when editing files in certain directories
set backupskip=/tmp/*,/private/tmp/*

" Enable line numbers
set number

" Enable syntax highlighting
syntax on

" Highlight current line
set cursorline

" Make tabs as wide as two spaces
set tabstop=2

" Show “invisible” characters
"set lcs=tab:~,trail:·,nbsp:_
"set list

" Highlight searches
set hlsearch

" Highlight dynamically as pattern is typed
set incsearch

" Enable mouse in all modes
set mouse=a

" Show the cursor position
set ruler

" Show the current mode
set showmode

" Show the filename in the window titlebar
set title

" Show the (partial) command as it’s being typed
set showcmd

Back to top

---

SSH

Генерация SSH ключей

ssh-keygen -t {type} -b {bits} -C {comment} -f {file_name}

e.g.

ssh-keygen -t rsa -b 16384 -C "baby@ovh.ft-ru.ru" -f ~/.ssh/baby

Back to top

---

Конфигурационный файл SSH

~/.ssh/config

Host *
    UseKeychain     yes

Include config.d/*

~/.ssh/config.d/VCS

# Custom ssh key for bitbucket
Hostbitbucket.org
	Hostname	bitbucket.org
	IdentityFile	~/.ssh/no_pass

# Custom ssh key for bitbucket
Host github.com
	Hostname	github.com
	IdentityFile	~/.ssh/id_rsa

~/.ssh/config.d/Projects

Host application-load-balancer
	Horstname	192.168.0.10
	IdentityFile	~/.ssh/secure
Host application-web-1
	Horstname	192.168.0.30
	IdentityFile	~/.ssh/no_pass
	ProxyJump	application-load-balancer
Host application-web-2
	Horstname	192.168.0.31
	IdentityFile	~/.ssh/no_pass
	ProxyJump	application-load-balancer
Host application-database
	Horstname	192.168.0.20
	IdentityFile	~/.ssh/no_pass
	ProxyJump	application-load-balancer

Back to top

---

SSH туннель

ssh -L 8080:localhost:80 192.168.0.10

more information ↑

Back to top

---

Easy SOCKS Proxy

ssh -D 12345 {user}@{host}

Back to top

---

macOS X

Mac OS Programms

• Etcher by resin.io -- создаени загрузочной USB

Back to top

---

Dock separator

defaults write com.apple.dock persistent-apps -array-add '{tile-data={}; tile-type="spacer-tile";}';
killall Dock;

Back to top

---

Nginx

Прокидка ссылок на файлы со staging'а на production

server {
    ...
    location ~* \.(jpg|jpeg|gif|png)$ {
        if (!-f $request_filename) {
            rewrite ^/images/(.*) http://example.com/images/$1 break;
         }
    }
    ...
}

Back to top

---

Database

MySQL

Database dump (MySQL)

mysqldump -u {username} -p {database_name} [--tables {table}] [--where="{query}"] > {outputfile}

e.g.

mysqldump -u utalents-test -p utalents-test > "utalents-test_(date +"%Y-%m-%d_%H-%M-%S").sql"

Back to top

---

Запись в БД из файла (MySQL)

mysql -u {username} -p {database_name} < {inputfile}

Back to top

---

PostgreSQL

Создание БД

psql postgres

CREATE DATABASE {db_name};
CREATE USER {user_name} WITH password '{password}';
GRANT ALL ON DATABASE {db_name} TO {user_name};

Back to top

---

Database dump (PostgreSQL)

pg_dump -U {username} {database_name} > {outputfile}

Back to top

---

Запись в БД из файла (PostgreSQL)

psql -U {username} {database_name} < {inputfile}

Back to top

---

Получение ссылок на поле таблицы (PostgreSQL)

SQL

SELECT
  tc.table_name
  , kcu.column_name
  , tc.table_schema
  , ccu.table_schema AS foreign_table_schema
  , ccu.table_name   AS foreign_table_name
  , ccu.column_name  AS foreign_column_name
  , rk.delete_rule   AS on_delete --strategy
  , tc.constraint_name
FROM
  information_schema.table_constraints AS tc
  JOIN information_schema.key_column_usage AS kcu
    ON kcu.constraint_name = tc.constraint_name
       AND kcu.constraint_schema = tc.constraint_schema
  JOIN information_schema.constraint_column_usage AS ccu
    ON ccu.constraint_name = tc.constraint_name
       AND ccu.constraint_schema = tc.constraint_schema
  JOIN information_schema.referential_constraints AS rk
    ON rk.constraint_name = tc.constraint_name
       AND rk.constraint_schema = tc.constraint_schema
WHERE
  tc.constraint_type = 'FOREIGN KEY'
  AND ccu.table_name = 'resolution_to'  -- Таблица
  AND ccu.column_name = 'id'            -- Поле
;

Back to top

---

Поиск залоченных процессов

SELECT pgsa.pid, pgsa.*
FROM pg_stat_activity AS pgsa
WHERE pgsa.wait_event_type = 'Lock';

Back to top

---

Долго выполняющиеся запросы

SELECT pgsa.pid,
       now() - pgsa.query_start AS duration,
       pgsa.query,
       pgsa.state
FROM pg_stat_activity AS pgsa
WHERE (now() - pgsa.query_start) > INTERVAL '5 minutes';

Back to top

---

Убийство процесса по pid

SELECT pg_terminate_backend(pid);

Back to top

---

Python

Virtualenv

Install virtualenv

sudo pip install virtualenv

Back to top

---

Create virtualenv

virtualenv --no-site-packages --prompt="({project_name})" {venv_name}

Back to top

---

Activate virtualenv

source {path_to_project}/{venv_name}/bin/activate

Back to top

---

Git

Создание алиаса для вывода дерева коммитов

git config --global alias.tree "log --oneline --decorate --all --graph"

Usage:

git tree

Back to top

---

Удаление игнорируемых файлов

git clean -Xdfe .idea # -e .idea — игнорировать папку .idea

Back to top

---

Откат изменений в удаленном хранилище

git reset --hard {commit}
git push --force

Back to top

---

Patch из нескольких коммитов

git diff {older_commit}..{younger_commit} > my-patch.patch

e.g.

git diff HEAD~2..HEAD > my-patch.patch

or

git diff bea1ccb..b028577 > my-patch.patch

Back to top

---

Переименование ветки

git branch -m {old_branch} {new_branch}         # Rename branch locally    
git push origin :{old_branch}                   # Delete the old branch    
git push --set-upstream origin {new_branch}     # Push the new branch, set local branch to track the new remote

Back to top

---

Удаление ветки

git push origin --delete {branch_name}      # Remove branch remotely
git branch -d {branch_name}                 # Remove branch locally

Back to top

---

Переименование тега

git tag {new_tag} {old_tag}                 # Copy tag with new name   
git tag -d {old_tag}                        # Remove tag locally
git push origin :refs/tags/{old_tag}        # Remove tag remotely
git push --tags                             # Push new tag remotely

Back to top

---

Клонирование ветки

git clone -b '{branch}' --single-branch {repo} {dir}
git clone -b 'v1.2.1' --single-branch --depth 1 https://github.com/finagin/Gulpfile.js.git v1.2.1

Back to top

---

Клонирование сабмодулей

В версии 1.9 и выше вы можете клонировать репозиторий и несколько сабмодулей паралельно:

git clone --recursive -j8 git://github.com/foo/bar.git

В версии 1.6.5 и выше:

git clone --recursive git://github.com/foo/bar.git

Для уже склонированного репозиторий или более ранних версий Git, нужно использовать:

git clone git://github.com/foo/bar.git
cd bar
git submodule update --init --recursive

Back to top

---

Удаление из индекса

Удаление файла

git rm --cached {file_name}

Удаление папки

git rm --cached -r {directory_name}

Back to top

---

Подделка даты коммита

git filter-branch --env-filter \
    'if [ $GIT_COMMIT = 119f9ecf58069b265ab22f1f97d2b648faf932e0 ]
     then
         export GIT_AUTHOR_DATE="Mon Feb 20 15:36:17 2017 +0300"
         export GIT_COMMITTER_DATE="Mon Feb 20 15:36:41 2017 +0300"
     fi'

Back to top

---

Перезапись "Initial commit"

git update-ref -d HEAD

Back to top

---

Git Flow

git-flow ↑

Back to top

---